b63d987ccdc814d30cde34c9f84dfefce43ce3da
mt5 mt5 zero-shot
- challenge
- Quiz Question Answering Challenge
- submitter
- Filip Graliński
- submitted
- 2021-10-25 11:37:45.006692 UTC
- file basename
- out
test-B / e95af8727e719c03d60646562b91f90f02e78976
| Metric | Score |
|---|---|
| Acc | 17.36 |
test-A / 203b9d90ec84b82013931cb917108e851a6e3d11
| Metric | Score |
|---|---|
| Acc | 17.92 |
worst items
note: the gold standard is taken from the submission itself, not from the challenge data!| # | input | expected output | actual output | dev-0 Acc |
|---|---|---|---|---|
| 1 | Czy poeta Lucjan Rydel tworzył także sztuki teatralne? | tak | Nie | 0.00 |
| 2 | W którym państwie została ogłoszona „Deklaracja praw człowieka i obywatela”? | we Francji | W USA | 0.00 |
| 3 | W którym mieście zmarł Sławomir Mrożek? | w Nicei | w Krakowie | 0.00 |
| 4 | Jak nazywał się autor powieści „Wierna rzeka”? | Stefan Żeromski | Andrzej Wajda | 0.00 |
| 5 | Na którym kontynencie leżała Kartagina? | w Afryce | Na południowym | 0.00 |
| 6 | Jak nazywał się reżyser pierwszego polskiego w filmu w 3D: „Bitwa Warszawska”? | Jerzy Hoffman | Andrzej Wajda | 0.00 |
| 7 | Które owady australijskie tworzą ogromne kopce, wysokie na 6 metrów? | termity | owady australijskie | 0.00 |
| 8 | W którym zespole ludowym w początkach kariery śpiewała Irena Santor? | Mazowsze | W zespole "Słoneczko" z Krakowa | 0.00 |
| 9 | W którym mieście znajduje się cmentarz na Rossie? | w Wilnie | w Moskwie | 0.00 |
| 10 | Co ma pod stopami Wenus na obrazie Botticellego pt. „Narodziny Wenus”? | muszlę | Jest to gwiazda | 0.00 |
| 11 | W co nie daje sobie dmuchać osoba stanowcza? | w kaszę | W swoje ciało | 0.00 |
| 12 | Jak miał na imię generał amerykański McArthur? | Douglas | Alfred McArthur | 0.00 |
| 13 | Jak nazywał się właściciel cukierni, w której w latach 1905-12 działała grupa Zielony Balonik? | Jan Apolinary Michalik | Andrzej Grzegorz | 0.00 |
| 14 | Czy Toruń należał do Księstwa Warszawskiego? | tak | Nie | 0.00 |
| 15 | Ilu synów miał patriarcha Jakub? | dwunastu 12 | około pięciu | 0.00 |
| 16 | Zwolnienie której robotnicy spowodowało strajk w Stoczni Gdańskiej? | Anny Walentynowicz | pracownika | 0.00 |
| 17 | Częścią którego oceanu jest Morze Czerwone? | Oceanu Indyjskiego | Morza Śródziemnego | 0.00 |
| 18 | Do którego warzywa odsyłamy coś, co się do niczego nie nadaje? | do chrzanu | Do pomidora | 0.00 |
| 19 | Jak z greki nazywa się chorobliwy strach przed ogniem? | pirofobia | - strach przed ogniem | 0.00 |
| 20 | W którym wieku ukazał się na łamach Kuriera Codziennego ostatni odcinek „Lalki”? | w XIX 19 | W wieku 10 lat | 0.00 |
| 21 | Jak nazywał się Michał Anioł? | Buonarotti | Michał Anioł | 0.00 |
| 22 | Jak ma na imię ciocia w piosence Agnieszki Osieckiej „Damą być”? | Jadzia | Monika | 0.00 |
| 23 | Nad którym morzem leżą Inflanty? | nad morzem Bałtyckim nad Bałtykiem | Nad Gibraltarem | 0.00 |
| 24 | W którym miesiącu 1968 roku miały miejsce w Polsce protesty studentów? | w marcu | Czerwiec | 0.00 |
| 25 | Jak w gwarze więziennej nazywa się nielegalnie przemycony list? | gryps | LIST | 0.00 |
| 26 | Do kogo Oleńka z Potopu zwraca się słowami: „ran Twoich niegodnam całować”? | do Kmicica | Do Oleńki | 0.00 |
| 27 | Jak po staropolsku zwał się okres od Bożego Narodzenia do Trzech Króli? | Gody | okres królewski | 0.00 |
| 28 | W którym mieście odbyła się premiera opery Giuseppe Verdiego „Aida”? | w Kairze | Warszawa | 0.00 |
| 29 | Jak nazywał się podróżnik i żołnierz, który dokonał podboju Madagaskaru? | Maurycy Beniowski | Alfred de Musset | 0.00 |
| 30 | Jakie warzywo jest jednym z głównych składników kopytek? | ziemniaki | pomidor | 0.00 |
| 31 | Dla kogo był przeznaczony obóz zwany oflag? | dla oficerów | Dla nauczycieli | 0.00 |
| 32 | Czy Watykan jest członkiem ONZ? | nie | Tak | 0.00 |
| 33 | W którym mieście w USA dzieje się akcja filmu „Kochaj albo rzuć”? | Chicago | w stanie Missouri | 0.00 |
| 34 | Która rzeka o długości ok. 300 km rozdziela USA i Meksyk? | Rio Grande | rzeka Potosi | 0.00 |
| 35 | W którym amerykańskim mieście podpisano Deklarację Niepodległości? | w Filadelfii | W San Francisco | 0.00 |
| 36 | Ile dzieci miał Moniuszko? | dziesięcioro 10 | około pięciu | 0.00 |
| 37 | Ile miesięcy zaczyna się na literę L? | trzy 3 | - miesięcy | 0.00 |
| 38 | Jaką nazwę pochodzącą z łacińskiego nosi drewniana okładzina ścian? | boazeria | okładzina drewniana | 0.00 |
| 39 | Leopard to czołg jakiej produkcji? | niemieckiej | Leoparda | 0.00 |
| 40 | Jak z angielskiego nazywa się bułka z ciepłą parówką? | hot-dog | Bread | 0.00 |
dev-0 / df7f1c04bb9c34c4ecad06a10b68fd0ddb31cebe
| Metric | Score |
|---|---|
| Acc | 16.60 |